Online peer assessment in higher education: a systematic review of literature in educational practices

Neste artigo procedemos a uma revisão sistemática da literatura sobre Online Peer Assessment (OPA) no Ensino Superior, mediadas por Tecnologias Digitais de Informação e Comunicação (TIC). Identificamos suas características, centrais e opcionais e mapeamos exemplos práticos (procedimentos e TIC) de OPA que poderão ser transversais, adaptáveis e aplicáveis em diversas unidades curriculares e regimes educacionais. Os resultados apontam para a utilização da OPA como uma estratégia que potencia a “avaliação para a aprendizagem”. Os referenciais teóricos subjacentes, os métodos de avaliação e os tipos de TIC utilizadas indicam seu direcionamento para um maior envolvimento e responsabilidade do aluno na sua aprendizagem. Evidenciamos na literatura que se busca desenvolver essas competências, dando ao aluno oportunidades com alguma regularidade para autoavaliar-se e avaliar seus pares por meio de feedback construtivo. Há também evidências de que dar ou produzir feedback é mais benéfico para a aprendizagem do que apenas recebê-lo, como também é cognitivamente mais exigente e envolve os alunos de forma mais ativa e os direciona ao pensamento crítico e a processos metacognitivos. A partir dos resultados alcançados, consideramos que a OPA, enquanto ferramenta cognitiva, contribui para a construção do conhecimento e para a reflexão sobre a aprendizagem. Um desafio que se coloca diz respeito ao desenvolvimento criativo com foco na diversificação e na inovação das práticas de avaliação no sentido de potenciar aprendizagens e resultados acadêmicos, em atenção às necessidades de aprendizagem que se manifestam frente às expectativas da educação atual e futura e às exigências da sociedade.In this research a systematic review of literature about Online Peer Assessment (OPA) in higher education, mediated by Information and Communication Technology (ICT), was carried out. Optional and central characteristics and its practices (procedures and ICT) were identified and mapping. These procedures and practices may be transversal, adaptable and applied in several curriculum units and educational regimes. The results point to the use of OPA as a strategy that enhances “assessment for learning”. The theoretical framework, the methods of assessment and the kinds of ICT used indicate directions for greater involvement and responsibility from the part of the student in his/her learning. Theoretical framework identifies the need to develop students’ skills, providing them with opportunities for self-assessment and peer assessment on a regular basis through constructive feedback. There is also evidence that to give or receive feedback is more beneficial for learning than just receiving it. It is also cognitively more demanding and directs the students to critical thinking and metacognitive processes. From the results obtained, OPA is seen as a cognitive tool, contributing to the building of knowledge and to reflection about learning. Issues for further reflection are also identified such as the creative development of assessment methods with a focus on diversity and innovation in order to enhance students’ learning and academic results, taking into account their learning needs in face of the expectations of current and future education and the demands of society.CIEC - Centro de Investigação em Estudos da Criança, IE, UMinho (UI 317 da FCT), PortugalFundos Nacionais através da FCT (Fundação para a Ciência e a Tecnologia) e cofinanciado pelo Fundo Europeu de Desenvolvimento Regional (FEDER) através do COMPETE 2020 – Programa Operacional Competitividade e Internacionalização (POCI) com a referência POCI-01-0145-FEDER-007562info:eu-repo/semantics/publishedVersio

A revisão por pares: causas e consequências dos principais problemas para avaliar a qualidade

Várias dificuldades são detectadas pela literatura sobre revisão por pares. O objetivo deste sistema é controlar a qualidade da produção científica, embora nem sempre seja possível atingi-lo satisfatoriamente. Por isso este trabalho busca identificar as principais causas e consequências dos problemas que a literatura aponta sobre avaliação pelos pares e apresentar propostas de melhoria. Para tanto, foram selecionados autores de diversas áreas do conhecimento que abordaram algum aspecto da revisão por pares. Os textos estudados se caracterizaram por alguma crítica ao processo de revisão por pares ou pela identificação de um problema. Os resultados mostraram que os principais problemas acerca da revisão por pares são: a ineficiência em detectar erros, falsificação e plágio; custos elevados para revistas em função da crescente rejeição de artigos; lentidão no processo de revisão e seu consequente atraso na publicação; conflitos de interesses e subjetividade e parcialidade no parecer dos colaboradores; dificuldades em encontrar revisores com experiência em diferentes áreas de especialização; bem como pareceres pouco criteriosos e dificuldade em atender os prazos. Conclui-se que as consequências para estes problemas vão desde o comprometimento da qualidade à inviabilização financeira, trazendo consequências para leitores, autores, revisores, editores e para a própria revista

A relevância da avaliação para o investimento social privado

O crescente interesse pelo uso estratégico da avaliação de programas e políticas sociais no Brasil tem sido marcado por avanços, mas também por inquietações entre formuladores, gestores e avaliadores sobre suas escolhas metodológicas. Qual método é mais adequado para avaliar este ou aquele programa? Qual abordagem é mais precisa? Que método é mais sensível à realidade social? Que percurso avaliativo é capaz de exercer maior influência sobre a tomada de decisões? Lançando mão de reflexões teórica e casos práticos, somando experiências estrangeiras e brasileiras, o livro oferece respostas a estas perguntas, capazes de alavancar a capacidade de escolher métodos que melhor dialoguem com a realidade social, bem como com suas próprias premissas éticas, políticas e técnicas. Fruto do II Seminário Internacional "A Relevância da Avaliação para o Investimento Social Privado: Metodologias", iniciativa da Fundação Itaú Social, Fundação Roberto Marinho, Fundação Maria Cecília Souto Vidigal em parceria com a Move e apoio do GIFE e da Fundação Santillana, esta publicação é mais uma contribuição para o plural e, cada vez mais consistente, campo avaliativo do País

AVALIAÇÃO DE DESEMPENHO DOCENTE: UM ESTUDO DE CASO NUMA INSTITUIÇÃO DE ENSINO SUPERIOR PRIVADO EM SALVADOR – BAHIA, BRASIL

Este artigo aborda a avaliação de desempenho do docente no nível superior numa perspectiva abrangente que contemple os protagonistas do processo de ensino aprendizagem. Discute os fundamentos teóricos da avaliação de desempenho profissional, buscando delimitá-los na questão da avaliação do professor de nível superior. Trata-se de uma pesquisa exploratória descritiva que utiliza como fonte de dados a revisão bibliográfica e uma pesquisa de campo, operacionalizada na forma de estudo de caso realizado numa instituição de ensino superior privado. O estudo de caso analisa o processo de avaliação de desempenho de professores duma faculdade, visando identificar suas confluências com as principais tipologias de um processo avaliativo 360 graus. Conclui que, considerando-se as especificidades do docente de nível superior, o processo de avaliação é desafiador, pois impacta diretamente na auto-estima e crenças arraigadas do docente e das expectativas da coordenação e direção acadêmica, ao mesmo tempo em que depara-se com a imaturidade discente. No entanto, trata-se de um processo factível de ser realizado desde que busque contemplar a avaliação das partes interessadas, a saber, os alunos, a coordenação/direção acadêmica e auto-avaliação do professor, buscando compor um índice que reflita o desempenho docente

COLABORAÇÃO EM MASSA OU AMADORISMO EM MASSA?

O alfa e o ómega deste estudo é a tentativa de provar a credibilidade da colaboração em massa enquanto pedra angular do modelo de negócio comummente denominado por open source. Para o demonstrar, realizou-se um estudo comparativo entre a qualidade dos artigos da Wikipédia e da Enciclopédia Britânica, tendo sido dado particular relevo à metodologia utilizada de modo a que os resultados obtidos fossem os mais fidedignos e abrangentes possíveis. É utilizada uma amostra aleatória representativa do universo composto pelos artigos que integram ambas as enciclopédias, tendo estes sido avaliado por peritos proficientes na temática em que estes se inserem. A qualidade média dos artigos da Wikipédia analisados revelou-se superior à dos seus pares, sendo a diferença encontrada estatisticamente significativa. Um inquérito previamente realizado junto dos avaliadores mostrou a reduzida confiança destes na qualidade da informação contida na Wikipédia. Esta percepção da qualidade e os resultados diametralmente opostos obtidos na avaliação dos artigos através de uma prova cega reforça a isenção do painel de avaliadores e a robustez dos resultados obtidos. Em termos de estrutura iremos começar com um pequeno enquadramento teórico; apresentando de seguida a metodologia utilizada no estudo e as implicações e constrangimentos que a escolha desta acarreta; finalizando com a apresentação dos resultados obtidos e as conclusões que destes podemos extrair

O desafio de pesquisar e publicar em revistas científicas: a perspectiva de editores e revisores internacionais

Estudantes de doutorado e pesquisadores em todo o mundo enfrentam o connundrum do publish or perish. A generalidade dos países ocidentais tem ou está a implementar sistemas de avaliação dos professores-pesquisadores e invariavelmente focam a sua produtividade medida pelos artigos publicados em revistas académicas reputadas. No entanto, publicar nestas revistas está a tornar-se progressivamente mais difícil, o prazo médio entre o recebimento e a avaliação até à publicação alarga-se, e as taxas de rejeição são, em muitas revistas, superiores a 90% dos artigos recebidos. Neste artigo, discutimos a dificuldade de publicar e identificamos alguns dos principais motivos para a rejeição de artigos na área de administração – quer do lado das revistas e do processo de revisão, quer dos autores e das suas competências. Apoiados em entrevistas a revisores e editores de revistas de referência, mostramos as suas opiniões e avançamos com sugestões para melhorar a qualidade dos artigos, nomeadamente a necessidade de conterem uma contribuição teórica significativa e seguirem os formalismos, nomeadamente de organização, essenciais

AVALIAÇÃO DE DESEMPENHO COMO FERRAMENTA GERENCIAL ESTRATÉGICA EM UMA IES COMUNITÁRIA

O presenta artigo busca demonstrar a avaliação de desempenho como ferramenta gerencial estratégica de uma Instituição de Ensino Superior, sendo esta aplicada aos funcionários técnico-administrativos os quais ocupam papéis inerentes às atividades-meios (de assessoria). A metodologia caracteriza-se qualitativa, com levantamento bibliográfico e documental, utilizando como fontes de pesquisa livros, artigos da área, documentos e relatórios da avaliação de desempenho da instituição. Como fonte de dados foram utilizados os resultados de três avaliações de desempenho, realizadas pelos funcionários técnico-administrativos de uma IES comunitária entre os anos de 2010 a 2012. Os resultados obtidos demonstraram que não se observou fragilidades relevantes quanto às competências técnicas dos funcionários ou às condições de trabalho. Todavia, ficaram explícitos os principais pontos a serem melhorados, nos apontamentos das questões abertas, relacionados aos comportamentos e atitudes dos funcionários que refletem no desempenho de suas atividades. Por fim, constatou-se que o processo de avaliação deve ser utilizado de maneira estratégica pela IES, buscando alinhar as metas pessoais aos objetivos organizacionais, gerando um processo de melhoria contínua e efetiva para a Instituição

Sistema de avaliação do desempenho em enfermagem: eficiência e eficácia

O presente estudo debruça-se sobre a avaliação do desempenho na carreira de enfermagem (Portugal), tendo como objectivo identificar as percepções de enfermeiros avaliadores e avaliados, sobre um sistema de avaliação do desempenho mais eficiente e eficaz que o corrente. Foi aplicado um questionário a 97 enfermeiros avaliadores e avaliados de um Hospital do Alto Alentejo. Constatou-se a existência de níveis de concordância e satisfação positivos com o sistema de avaliação do desempenho, sucedendo o mesmo para os aspectos legislados. De uma forma geral, verificámos que a percepção dos avaliadores acerca de um sistema de avaliação do desempenho mais eficiente e eficaz que o corrente deverá ser enquadrado numa gestão por objectivos e incluir uma validação social da menção final de avaliação. Por outro lado, os avaliados pretendem um sistema de avaliação que inclua um acompanhamento regular (incidentes críticos), objectivo (gestão por objectivos), e com melhores procedimentos de interacção. Os resultados mostram a importância da distinção entre o sistema instituído e a forma como é aplicado

AVALIAÇÃO DE DESEMPENHO NO IFSC: FATORES PROPULSORES PARA AS INOVAÇÕES

O presente artigo buscou analisar os fatores propulsores das inovações ocorridas no processo de avaliação de desempenho dos servidores do Instituto Federal de Educação, Ciência e Tecnologia de Santa Catarina - IFSC. Para que tal objetivo fosse alcançado, utilizou-se o método indutivo, a pesquisa aplicada, a pesquisa do tipo exploratória e a do tipo descritiva. Como técnica de pesquisa adotou-se a pesquisa bibliográfica. O instrumento de coleta de dados utilizado foi uma entrevista realizada com uma psicóloga que atua no processo de avaliação de desempenho dos servidores. Quanto ao tratamento dos dados coletados, optou-se pela abordagem qualitativa. Com o propósito de fundamentar a pesquisa, na fundamentação teórica foram apresentados os seguintes assuntos: inovação, inovação no serviço público, avaliação de desempenho e fundamentação legal da avaliação de desempenho nas instituições federais de ensino. Foi possível descrever as inovações ocorridas na avaliação de desempenho dos servidores da instituição ao longo dos anos e identificar as origens de cada umas das inovações ocorridas. Concluiu-se a pesquisa identificando que a maior parte dos fatores propulsores das inovações ocorridas no processo de avaliação de desempenho dos servidores do IFSC são externos à organização